W11A. Peer-review раздела Methodology

1. Краткое содержание

1.1 Зачем peer-reviewить Methodology

Peer review раздела Methodology выполняет ту же двойную функцию, что и для любого академического текста: даёт автору адресную конструктивную обратную связь до финальной сдачи и тренирует рецензента узнавать признаки сильной, хорошо обоснованной методологии. Поскольку Methodology — это аргумент, а не список техник, рецензент должен спрашивать, обоснованы ли решения, согласованы ли они между собой и связаны ли с заявленными целями исследования.

Сессия peer review Methodology следует сразу за сдачей первого черновика: авторы получают обратную связь, пока правки ещё возможны; рецензенты тренируют критическое чтение, переносимое на собственный текст.

1.2 Четырёхэтапная процедура peer review

Занятие выстроено в четыре последовательных этапа — от независимого чтения к совместному обсуждению.

Этап 1 — назначение групп. Каждая research group совместно решает, Methodology какой другой группы она будет рецензировать. Назначение делается в начале занятия и задаёт объём работы на этапе 2.

Этап 2 — индивидуальное чтение. Каждый студент работает самостоятельно. Назначенный раздел Methodology читается три раза; в процессе заполняется таблица оценки из Handout 1.

Три прохода нужны потому, что за один редко всплывают все сильные и слабые стороны структурированного текста:

• первое чтение — общее впечатление и проверка, насколько в целом убедительна схема research design;
• второе чтение — конкретные утверждения: закрыты ли семь вопросов методологии? обоснован ли выбор? названы ли ограничения?
• третье чтение — проверка наблюдений и поиск паттернов (например, систематически отсутствует обоснование или один вопрос закрыт противоречиво несколько раз).

Критическое ограничение: на этапе 2 студенты не общаются друг с другом. Каждый рецензент формирует независимое мнение только по тексту. Peer consultation (совместное обсуждение текста между рецензентами) на этом этапе вводит anchoring — ранние мнения формируют оценку остальных до тщательного чтения — и подрывает ценность нескольких независимых читателей.

Этап 3 — обсуждение в группе. Когда все заполнили таблицы, рецензирующая группа вновь собирается: сверяют оценки, обсуждают согласия и расхождения, вырабатывают согласованную картину. Расхождения часто указывают на двусмысленные места или дизайн, который можно понять по-разному.

Этап 4 — межгрупповой диалог. Рецензирующая группа встречается с авторами Methodology. Обратная связь передаётся и обсуждается напрямую. Авторы задают уточняющие вопросы; рецензенты поясняют логику. Выигрывают обе стороны: авторы видят, как внешний читатель понимает дизайн; рецензенты тренируются аргументировать конкретные оценки.

1.3 Что оценивать в Methodology

Заполняя таблицу в Handout 1, систематически проверьте, закрывает ли раздел Methodology семь планировочных вопросов из W10B и соответствует ли текст стандартам курса.

В том числе спросите:

• Research approach: указан ли inductive / deductive подход (или комбинация)? объяснён ли выбор и связь с целью исследования?
• Practical considerations: названы ли ограничения по времени, доступу к данным или навыкам исследователя? учтены ли они явно, а не просто проигнорированы?
• Data collection: точно ли описаны методы сбора? обоснован ли выбор (опрос, интервью, анкета, наблюдение)?
• Secondary data: если используются вторичные данные, идентифицированы ли они и объяснена ли роль? ясен ли аналитический вклад исследования?
• Sampling method: названа и обоснована ли конкретная стратегия отбора? объяснено ли, почему probability или non-probability?
• Sample size: указан или оценён ли объём выборки? есть ли обоснование по целям, требуемой точности или sample size calculator?
• Data analysis: указан и обоснован ли тип анализа (quantitative, qualitative или mixed)?

Помимо семи вопросов оцените аргументацию:

• выбор объяснён или только перечислен?
• ограничения признаны и к ним есть план действий?
• Methodology согласована — все части складываются в один дизайн?
• изложение конкретно — читатель понимает, что именно сделают исследователи, или описания размыты?

1.4 Как давать конструктивную обратную связь

Эффективная обратная связь по Methodology — конкретная, опирающаяся на текст и прикладная. Избегайте общих фраз вроде «раздел методов неполный» или «выборка хорошо описана». Указывайте на конкретные фрагменты и объясняйте, что в них происходит или не происходит.

Полезная структура:

1. Указать место (например, подраздел о sampling, третий абзац).
2. Описать наблюдение (например: «назван stratified sampling, но не сказано, как определены страты»).
3. Объяснить проблему (например: «читатель не может оценить, отражают ли страты нужную вариацию в population»).
4. Предложить направление правки (например: «добавьте одно предложение с критериями стратификации и их связью с research question»).

Так автор получает не размытый сигнал «что-то не так», а опору для правок.

1.5 Домашнее задание: переработать по обратной связи

После сессии peer review каждая группа должна доработать раздел Methodology с учётом полученной обратной связи. Отдельной формальной сдачи этой переработки нет, но изменения нужно включить в финальный черновик proposal.